|
|
1.
基于无监督学习的专业领域分词歧义消解方法
修驰 宋柔
计算机应用
2013, 33 (03):
780-783.
DOI: 10.3724/SP.J.1087.2013.00780
中文自然语言处理中专业领域分词的难度远远高于通用领域。特别是在专业领域的分词歧义方面,一直没有找到有效的解决方法。针对该问题提出基于无监督学习的专业领域分词歧义消解方法。以测试语料自身的字符串频次信息、互信息、边界熵信息为分词歧义的评价标准,独立、组合地使用这三种信息解决分词歧义问题。实验结果显示该方法可以有效消解专业领域的分词歧义,并明显提高分词效果。
参考文献 |
相关文章 |
多维度评价
|
|
